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Abstract 


A method for determining the position of a patient's organ with respect to at least two imaging devices 
includes a step of making at least one three-dimensional first image of an organ of a patient giving a first 
coordinate system and of a surface of the organ or skin region using a first imaging device without fixing any 
mark to the patient, placing the patient in an operation site having a second coordinate system and 
determining a first position of a second imaging device with respect to the second coordinate system of the 
operation site. In addition, the method includes the steps of making a second image with the second imaging 
device, matching the first and second images and providing a third device having a third coordinate system, j 
The third device is positioned with respect to the second image of the second device which thereby positions 
the third device with respect to the first image of the first imaging device. i 
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Description 

[0001] La pr6sente invention concerne le domaine de 
la chirurgie et de I'observation m6dicale et plus particu- 
lierement des precedes et dispositifs de positionnement 
d'un outil therapeutique ou diagnostique en fonction 
d'images spatiales, ces images spatiales pouvant etre 
des images r6alis6es au pr6alable (images pre-op£ra- 
toires) d'un organe d'un patient. 
[0002] Dans la presente demande de brevet, on en- 
tend par "outil" tout moyen d'action therapeutique ou 
diagnostique sur un patient. L'outil peut par exemple 
etre un dispositif propre a inserer une vis dans un os 
d'un patient, un trocart destine a realiser une ponction 
ou simplement a acheminer une fibre optique, un appa- 
reil d'emission de rayons destines a agir sur une tumeur, 
ou encore un appareil d'imagerie medicale tel qu'une 
camera de gamma-scintigraphie, un appareil de tomo- 
graphie par emission de positrons (TEP), ou un appareil 
de magnetoencephalographie (MEG). 
[0003] En d'autres termes, un objectif est de retrou- 
ver, durant un geste medico-chirurgical, les informations 
morphologiques que des examens tridimensionnels 
prdalables avaient permis d'obtenir. Cette situation est 
tres frdquente cliniquement. Nous en donnerons ci- 
apres deux exemples. 

1 0 Radiotherapie 

[0004] La radiotherapie est I'acte consistant a projeter 
sur une zone donnee d'un patient ou d'un organe d'un 
patient un flux de rayonnement de facon a detruire des 
tumeurs existant dans cet organe. De tels traitements 
doivent generalement etre effectu6s de facon p6riodi- 
que et r6p6tee. II taut done a chaque intervention repla- 
cer la source de rayonnement par rapport au patient 
pour irradier la zone choisie et autant que possible de 
la facon ta plus specifique possible pour eviter d'irradier 
d'autres zones du patient sur lesquelles le flux de rayon- 
nement aurait un effet nefaste. 
[0005] Le diagnostic initial a generalement ete effec- 
tue par un scanner a rayons X ou par imagerie par re- 
sonance magnetique (IRM) qui permettent de visualiser 
la cible et les obstacles et done de def tnir une strategic 
therapeutique optimale. Toute la difficulte est de repo- 
sitionner le patient quand on veut lui faire subir le trai- 
tement. La methode actuellement couramment utilisee 
consiste a simuler Intervention en remplacant I'acc6l6- 
rateur lineaire (la source de rayonnement) par un tube 
a rayons X. On obtient ainsi deux radiographies (face et 
profil) du patient que Ton compare (visuellement) aux 
informations tridimensionnelles prealables provenant 
du scanner X ou de I'lRM. On deplace le patient et Ton 
refait des cliches jusqu'a ce que Ton soit satisfait de son 
positionnement. Un trait lumineux materialise alors une 
marque sur la peau du patient et Ton inscrit cette marque 
a meme la peau du patient a I'aide d'un marqueur. Lors 
de la stance d'irradiation, on d6placera le patient jus- 
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qu'a ce que ces marques cutanees coincident avec des 
faisceaux lumineux identiques pour I'accelerateur li- 
neaire et pour le systeme radiologique de simulation. 
Ce precede classique pr6sente de nombreux inconv6- 

5 nients. L'un deux est qu'il oblige a deplacer le patient 
sur la table de soin pour lui faire prendre une position 
souhaitee, ce qui n'est pas toujours facile et qui peut 
amener le patient a prendre des positions inconfortables 
ou a etre dans un etat crispe tel qu'il ne pourra pas main- 

10 tenir sa position. 1 1 faut souligner que le positionnement 
du patient doit etre aussi pr6cis que possible. Par exem- 
ple dans le cas de la phase finale de la radiotherapie de 
la prostate, ou seul cet organe, inclusdans une sphere 
de 4 cm de diametre, est vise, on est amene avec les 

is procedes classiques a irradier avec des champs de 1 0 
cm de diametre pou r etre certain que la prostate est cor- 
rectement atteinte. Ceci n'est bien entendu pas sans in- 
convenient pour les zones environnantes. 



[0006] II s'agit ici d'aider a Pintroduction de materiel 
(par exemple une vis) dans le corps humain (couram- 
ment dans un os) selon une trajectoire lineaire. La forme 

25 de I'os est classiquement etudiee par un moyen d'ima- 
gerie tridimensionnel (scanner X ou IRM) et la strategie 
d'intervention est ensuite determinee en fonction de cet- 
te image, notamment en ce qui concerne la direction 
exacte dans laquelle devra etre inseree l'outil pour at- 

30 teindre exactement Pemplacement souhaite sans pas- 
ser par des zones ou il risque d'etre destructif. 
[0007] Classiquement, pendant la phase operatoire, 
on utilise des precedes radiographiques pour controler 
Introduction de l'outil. L'inconv6nient majeur est que, 

35 dans les conditions habituelles, on ne peut pas r6aliser 
simultanement des images face et profil de la cible et 
du materiel. On ne peut done utiliser ce precede que 
comme moyen de verification a posteriori de la qualite 
du positionnement du materiel (la progression n'etant 

40 suivie en temps reel que sur une projection). D'autre 
part, cette verification ne peut etre r6alisee de maniere 
quantitative, ^interpretation est laissee a l'op6rateur. 
Les etudes actuelles montrent qu'avec ces techniques, 
ii existe pratiquement 10 % des cas dans lesquels le 

45 positionnement n'est pas ideal. 

[0008] Le document EP-A-0 427 358 divulgue un pro- 
cede de determination de la position d'un organe d'un 
patient a I'aide d'un dispositif de formation d'image dans 
une enceinte operatoire apres avoir realise une image 

so tridimensionnelle de I'organe du patient avec un deuxie- . 
me dispositif de formation d'image dans une enceinte 
pr6-operatoire, le procede comprennant la fusion des 
images des deux dispositifs en utilisant des points de 
reference fixes sur le patient. 

55 [0009] Le document WO-A-92/04 862 divulgue un 
procede similaire dans lequel les images d'une. sonde 
ecographique montee sur un bras articule dans un pre- 
mier referentiel sont fusionnees avec des images bio- 
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magnetiques obtenues dans un deuxieme ref6rentiel. 
[0010] On a ensuite propose pour ameiiorer I'utilisa- 
tion per-op6ratoire du systeme radiologique de mettre 
en oeuvre des techniques de fusion d'images tridimen- 
sionnelle et bidimensionnelle (S. Lavall6e et al., Mat- 
ching 3D smooth surfaces with their 2D projections 
using 3D distance maps, SPIE 1570, P. 322-336, 1991). 
Toutefois, ce precede est coOteux car il nScessite d'uti- 
liser un systeme radiologique de bonne qualite" capable 
d'etudier la cible sur plusieurs incidences et dont le si- 
gnal puisse etre num6ris6. Pour 6viter les inconv6nients 
des systemes radiologiques, plusieurs equipes medica- 
les ont propose de realiser des interventions sous scan- 
ner ou IRM. II est alors facile de realiser la comparaison 
entre les images pr6-op6ratoire et per-op6ratoire effec- 
tu6es par le meme moyen. Toutefois, ces approches 
presentent de nombreux inconvenients du fait qu'elles 
imposent la presence simultanee d'outils d'imagerie so- 
phistiques et d'instruments opeVatoires. Parmi ces in- 
convenients, on peut notamment citer : 

contraintes chirurgicales (asepsie...), 
immobilisation longue (pendant toute une opera- 
tion) d'un materiel coOteux (scanner X ou IRM) alors 
que Ton tente au contraire d'utiliser en continu ces 
appareils pour des taches d'observation pour assu- 
rer leur rentabilite, 

necessite de prevoir un materiel chirurgical sp6cifi- 
que (dans le cas de I'lRM, ce materiel doit etre non 
gdnerateur d'artefacts et en particulier non- 
ferromagnetique) ; ceci amene par exemple a r6a- 
liser des outils en titane qui sont particulierement 
coOteux, 

la g6ometrie m§me des appareils d'imagerie (tun- 
nel de diametre etroit) rend Introduction de mat6- 
riel chirurgical difficile. 

[0011] Toutefois, I'essor de ces techniques de fusion 
d'images tridimensionnelles malgre' toutes les difficultes 
qui ont 6te resumees ci-dessus montre I'interet de la 
communaute medicale pour tout moyen susceptible 
d'ameiiorer la precision de ['introduction de materiel 
medico-chirurgical. 

[001 2] Un objet de la present e invention est de prevoir 
un precede" simple et peu coOteux pour r6aliser une s6- 
rie d'images per-op6ratoires d'un organe permettantde 
positionner un outil d'une facon determinee par rapport 
a une sdrie d'images pr6operatoires tridimensionnelles. 
[0013] Pour atteindre cet objet, la presente invention 
prevoit d'utiliser, pour realiser les images per-op6ratoire 
une sonde ecographique fournissant une image mor- 
phologique tridimensionnelle de points de surface de 
I'organe ou d'une region cutan6e fixe par rapport a I'or- 
gane. Apres quoi, cette image de points de surface est 
combin6e (fusionnee) avec Pimage tridimensionnelle 
fonctionnelle pr6-operatoire qui contient aussi des infor- 
mations de localisation des points de surface (de I'orga- 
ne ou d'une region cutanea). 



[0014] Pour obtenir une image morphologique tridi- 
mensionnelle de points de surface de I'organe, la pre- 
sente invention prevoit d'utiliser des sondes echogra- 
phiques. L'image morphologique tridimensionnelle de 

5 points de surface d'une region cutan6e fixe par rapport 
a I'organe peut etre, par exemple, une image d'une por- 
tion de la t§te qui est fixe par rapport au cerveau. 
[0015] En outre, la prdsente invention prevoit d'ali- 
gner le reterentiel de I'outil par rapport au referential de 

io I'organe lui-meme determine par l'image pr6-operatoire. 
[0016] Un deuxieme objet de la presente invention est 
de realiser une fusion d'image entre l'image de la sonde 
ecographique fournissant commecela a ete indique une 
image morphologique tridimensionnelle de points de 

15 surface Ii6s a un organe, et l'image d'un troisieme ap- 
pareil place dans le meme site op6ratoire tel qu'une ca- 
mera de gamma-scintigraphie, un appareil de tomogra- 
phie par emission de positrons (TEP) ou un appareil de 
magnetoencephalographie (MEG) fournissant des in- 

20 formations fonctionnelles sur des zones sp6cifiques de 
cet organe, d'ou il resulte qu'il est possible de position- 
ner ces zones specifiques de I'organe. 
[0017] Pour atteindre ce deuxieme objet, la presente 
invention prevoit de reperer au prealable une position 

25 jnitiale du premier dispositif et du deuxieme appareil en 
leur faisant viser une meme cible visible pour chacun 
d'eux (par exemple en ultrasons et en rayons gamma 
dans le cas d'une sonde echographique et d'une came- 
ra de gamma-scintigraphie). 

30 [0018] L'une des originates de I'invention reside 
dans I'utilisation d'un dispositif ne fournissant pas d'in- 
formation fonctionnelle mais seulement des images de 
points de surface pour servir d'intermediaire permettant 
desreperagesde reterentiels. En particulier, I'ideed'uti- 

35 User une sonde echographique pour realiser cet aligne- 
ment de ret 6rentiels constitue I'un des aspects de la pre- 
sente invention etant donn6 que, a priori, une image 
echographique donne une information moins riche que 
les procedes de type IRM ou scanner. En effet, l'6cho- 

^0 graphie fournit habituellement une s6rie de coupes pla- 
nes et independantes d'un organe, et non un volume 
structure en s6rie de coupes paralleles. 

Rappels sur I'echoqraphie 

45 

[0019] L'echographie est une modalite d'imagerie qui 
a pris son essor dans les annees 1 970. Un transducteur 
(cristal piezoeiectrique) 6met des ultrasons (a des fre- 
quences de plusieurs megahertz) qui se propagent 

50 dans le corps humain, mais sont susceptibles de re- 
flexion lorsqu'ils abordent des interfaces ou I'impedance 
acoustique du milieu subit de fortes variations (typique- 
ment, une interface eau/graisse). Le meme transduc- 
teur peut etre utilise durant une periode breve comme 

55 emetteur d'ultrasons, et, pendant une periode g6n6ra- 
lement plus longue, comme recepteurdes ultrasons r6- 
fiechis par le corps humain. II est alors possible de me- 
surer a la fois I'intervalle temporel entre emission et r6- 
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caption (ce qui permet, moyennant des hypotheses sur 
la ceierite des ultrasons dans le milieu consider, de d6- 
terminer la localisation de la source 6chogene) et Pin- 
tensite de P6cho (ce qui donne des informations sur la 
nature du point echogene). 

[0020] Le mode de fonctionnement le plus simple 
consiste a n'emettre et a ne recueillir les ultrasons que 
dans une direction (mode A). On obtient alors un signal, 
variable en fonction du temps si les structures 6choge- 
nes sont mobiles. Ce mode de fonctionnement a ete le 
premier utilise en m6decine, particulierement dans les 
applications cardio-vasculaires (ou il permettait d'6va- 
luer la mobility des valves cardiaques, par exemple). 
[0021] II est egalement possible d'6mettre et de re- 
cueillir les ultrasons dans une portion plane (g6n6rale- 
ment trape" zoTdale) de I'espace (mode B). Ceci peut etre 
realise par la juxtaposition sur une barrette lineaire 
d'une s6rie de transducteurs mono-dimensionnels 
fixes, ou par la mise en rotation (m6canique ou eiectro- 
nique), dans un plan, autourd'un point fixe, d'un trans- 
ducteur mono-dimensionnel. Cette modality d'imagerie 
s'est rdvelee tres precieuse pour retude des "organes 
mous", en particulier dans les domaines gynecologi- 
ques et obstetricaux, ainsi qu'en gastro-enterologie. 
[0022] II y a en outre de nombreuses situations clini- 
ques ou ce sont les echographies qui fournissent les in- 
formations les plus interessantes (en particulier en gas- 
tro-enterologie, en gyneco-obstetrique et en cardiolo- 
gie). Les echographies sont aussi un moyen prdcieux de 
guidage d'interventions medicales (ils permettent par 
exemple de controler Introduction d'aiguilles de ponc- 
tion a I'int6rieur du corps humain). 
[0023] D'autre part, a quality d'information equivalen- 
te, Tachograph ie presente par rapport au scanner X et 
a I'lRM les avantages suivants : 

environ 10 fois moins cher 
I'emetteur est realisable sous forme d'une sonde 
que Ton plaque contre le corps mais qui est legere 
et facile a porter. Par contre, les appareils de type 
scanner X et IRM sont des appareils extrdmement 
encombrants qui occupent un volume important 
dans une salle d'examen, 

par rapport au scanner X, I'dchographie, comme 
I'lRM, presente I'avantage d'une parfaite innocuite. 

[0024] Mais surtout, I'avantage essentiel de I'echo- 
graphie est qu'il s'agit d'une modalite d'imagerie mor- 
phologique de bonne quality simple d'emploi et peu coO- 
teuse. 

[0025] En outre, les pr6jug£s habituels ecartent tes 
methodes d'6chographie des qu'il s'agit d'analyses or- 
thopediques, c'est-a-dire d'analyses concernant des os. 
En effet, dans les conditions habituelles, les ultrasons 
ne traversent pas les os qui les refldchissent speculai- 
rement. II est done impossible d'etudier I'interieur des 
os par des ultrasons. L'6tude de la surface des os est 
cependant possible bien que rendue delicate par le ca- 



ractere sp6culaire de la reflexion des ultrasons. La re- 
flexion ne se faisant quasiment que dans la direction 
donn6e par la loi de Descartes, chaque echographie 
d'un os donnera des images tres pauvres en 
5 informations : seules seront vues des portions de con- 
tour d'os dont la normale est parallele a la direction des 
ultrasons. 

[0026] Toutefois, pour ['application envisages ici, il 
suffit comme on le montrera ci-apres de recueillir une 
10 information sur un point de la surface d'un os a chaque 
prise de vue echographique pour pouvoir mettre en 
oeuvre le proc6d6 selon invention. L'echographie s'ap- 
plique done alors egalement a des applications ortho- 
pediques. 

is [0027] Plus pr6cis6ment, la presente invention pr6- 
voit un proc6d6 de determination de la position d'un or- 
gane d'un patient par rapport a au moins deuxdispositifs 
de formation d'image comme cela est d6fini dans la re- 
vendication 1 . 

20 [0028] Des modes de realisation de la presente inven- 
tion sont d£finis dans les sous-revendications. 
[0029] Ces objets, caracteristiques et avantages ainsi 
que d'autres de la prdsente invention seront exposes en 
detail dans la description suivante de modes de realisa- 

25 tion particuliers faite en relation avec les figures jointes 
parmi lesquelles : 

la figure 1 illustre un exemple de mire 6chographi- 
que utilised selon la presente invention ; et 
30 la figure 2 represente un exemple de mire mixte 
6chographie/gamma-scintigraphie utilises selon la 
presente invention. 

[0030] Comme cela a 6t6 rappeie prec6demment, 
35 dans plusieurs actes m6dicaux, diagnostiques ou th6- 
rapeutiques, il est ndcessaire de fusionner (c'est-a-dire 
de faire se correspondre de facon determines) un pre- 
mier reference! dans lequel un examen prealable, pre- 
op6ratoire, a permis d'6tudier unepartie de I'organisme 
40 et de determiner une strategie operatoire, et un deuxie- 
me r6f6rentiel correspondant au systeme dans lequel 
est realist I'acte operatoire. Les methodes actuelles 
sont essentiellement des methodes de mise en place 
de marqueurs visibles aussi bien lors de I'acte operatoi- 
45 re que lors de I'examen pr6-operatoire et comme on Pa 
indique pr6c6demment sont souvent impr6cises et dif- 
ficiles d'emploi. 

[0031] L'examen pr6-op6ratoire doit permettre d'iden- 
tifier des objets anatomiques (une vertebre, une pros- 

50 tate, le cerveau...) dont la forme ou la forme de I'enve- 
loppe cutanee (la peau du crane pour le cerveau) servira 
de reference pour la fusion des referentiels. Ainsi, on se 
place dans le cas ou les referentiels sont "f usionn6s" en 
fonction de Porgane lui-meme ou de son enveloppe cu- 

55 tan6e. Diverses techniques de traitement d'image per- 
mettent de r6aliser ces operations en passant par une 
etape dite de segmentation tridimensionnelle (F. Leitner, 
I. Marque, S. Lavaliee, P. Cinquin, Dynamic 
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segmentation : finding the edges with spline snakes, 
Proc. Int. Conf. on Curves and Surfaces, Chamonix, 
Academic Press, 279-284, 1991). 

Utilisation de la sonde echographique 

[0032] La presente invention vise un precede dans le- 
quel I'image operatoire resulte d'un nuage de points ob- 
tenus par examen Echographique de la zone concernee 
qui permet de visualiser des objets prealablement seg- 
ment6s. 

[0033] La difficulte reside dans la conception d'un pro- 
tocole qui permettra de relier les coordonnees des 
points observes en echographie au referentiel per-ope- 
ratoire. Pour ce faire, la position de la sonde echogra- 
phique doit pouvoir etre repeVee dans le referentiel per- 
operatoire. 

[0034] Selon un premier mode de mise en oeuvre de 
Tinvention, on peut pr6voir sur la sonde elle-meme des 
points de repere detectables par un capteur adequat 
(par exemple des diodes photoluminescentes, des 
emetteurs d'ultrasons) fixe rigidement par rapport au re- 
ferentiel operatoire. 

[0035] Selon un autre mode de realisation prefere de 
la presente invention, ia sonde est fixee rigidement a 
I'extremite d'un bras articule de robot. On determine 
alors d'une part la position de la sonde par rapport au 
bras articule, d'autre part la position du referentiel du 
bras articule par rapport au referentiel operatoire. 

a) Determination de la position relative de la sonde par 
rapport au bras articule. 

[0036] Pour realiser cette determination, la presente 
invention propose de determiner la position de la sonde 
par rapport a une mire de calibrage qui permet de vi- 
sualiser en echographie des points de repere dont la 
distribution spatiale est fixe. Ces points de repere sont 
etudies en echographie et leur position spatiale reelle 
est compare avec celle que fournit le changeur de 
coordonnees du bras du robot pour une position theori- 
que de la sonde. On peut alors par une technique des 
moindres carres non-lineaires identifier des parametres 
de rotation et de translation qui caracterisent le passage 
du referentiel de la sonde a celui du bras. 
[0037] La sonde etant fixee rigidement a I'extremite 
du bras, il s'agit de trouver la transformation qui lie le 
repere de la sonde au repere du bras articule. Pour cela, 
on etudie trois points de reference d'une mire qui doi- 
vent pouvoir etre etudies dans au moins deux positions 
quelconques. 

[0038] Un mode de realisation d'une mire selon la pre- 
sente invention est illustre en figure 1 . Cette mire com- 
prend, dans un milieu transmettant les ultrasons, par 
exemple une cuve a eau 10, trois fils 1 , 2 et 3 tendus 
entre deux plans. Trois autres fils, 4, 5 et 6 relient deux 
a deux les trois fils 1, 2 et 3 et forment un triangle. Le 
triangle peut etre fabrique par un fil fin en un materiau 



echogene. par exemple un fil de Nylon. Ensuite, au 
moyen du manipulateur d'un bras articule (non repre- 
sent6), on dispose une sonde 11 pour que son faisceau 
plan 12 soit coplanaire avec le plan des trois fils 4, 5 et 

5 6. Lorsque la sonde est dans le plan du triangle, on vi- 
sualise alors parfaitement ce triangle dont on extrait le 
sommet en calculant I'intersection de ses aretes. A par- 
tir de cette position de la sonde 11, on fait toumer la 
sonde de 180° autour de I'axe Z compris dans le plan 

10 de I'image echographique. Ceci permet d'identifier les 
parametres de rotation. 

[0039] On deplace la mire de calibrage vers une autre 
position quelconque et on repete I'operation de saisie 
des points de la mire dans deux positions du bras arti- 

JS cuie porteur de la sonde echographique tournees I'une 
par rapport a I'autre de 1 80° . On dispose alors de toutes 
les donn6es necessaires pour mettre en oeuvre une 
methode de calibrage ctassique, telle que decrite par 
exemple par Y. C. Shiu et al., Finding the mounting po- 

20 sition by solving a homogeneous transform equation of 
form AX=XB, CH241 3-3/87/0000/1 666 1987 IEEE. 

b) Determination de la position du referentiel du bras 
articule et de la sonde par rapport au referentiel de l'outil 
25 operatoire. 

[0040] L'outil operatoire, par exemple un guide d'in- 
troduction d'une aiguille, peut avoir 6t6 usine conjointe- 
ment avec le bras articule porte-sonde. Dans ce cas, 
30 aucun probldme de positionnement particulier ne se po- 
se. 

[0041] Par contre, si l'outil operatoire a 6te concu in- 
dependamment du bras articule porte-sonde, il faut re- 
p6rer mutuellement leurs reterentiels. 
35 [0042] Dans un premier exemple , l'outil operatoire est 
une camera de gamma-scintigraphie ou un tomogra- 
phe, et on utilise pour faire le reperage une mire mixte 
visible a la fois en echographie et en gamma-scintigra- 
phie. 

40 [0043] La figure 2 represente un exemple d'une telle 
mire constitu6e de quatre fils non-paralieies (20-23) ten- 
dus entre deux plans paralleles. Ces quatre fils sont des 
tubes minces tendus entre deux plaques de plexiglas 
24, 25 et sont remplis d'un produit radioactif. La mire, 

45 une fois placee dans une cuve a eau, peut done etre 
vuea la fois en echographie et en scintigraphie. Sur cha- 
que coupe scintigraphique, on detecte quatre sources 
radioactives et sur la sonde echographique on observe 
directement les intersections des quatre tiges 20, 21 , 22 

so et 23 tendues entre les plaques de plexiglass 24 et 25 
avec le plan echographique. A partir de ces donnees, 
on peut reconstituer les equations des quatre droites 20, 
21 , 22, 23 dans les reperes d'echographie et de camera 
scintigraphique. 

55 [0044] Pour chaque paire de tiges 20, 21 , 22, 23, on 
calcule ensuite un point virtuel 30-35 d6finissant le mi- 
lieu du segment dont la longueur est la distance mini- 
male entre deux tiges. On obtient ainsi un ensemble de 
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six points dans !e repere Echographique et de six points 
dans le repere de la camera. On peut ensuite appliquer 
une methode de minimisation connue, par exemple eel- 
le decrite par K.S. Arun et al. dans IEEE Transactions 
on Pattern Analysis and Machine Intelligence, Vol. PA- 
MI. 9 N° 5, pp. 698-700. 

[0045] Dans un deuxieme exemple , I'outil op6ratoire 
est un appareil de radiotherapie qui est souvent associe 
a des sources de taisceaux laser permettant de localiser 
un reflecteur en forme de coin a aretes orthogonales. 
On utilise comme mire mixte une mire echographique, 
par exemple du type de celle de la figure 1, a laquelle 
est fixe, de facon bien determinee par rapport aux trois 
fils 4, 5, 6, un coin reflecteur que Ton positionne, pour 
le calibrage initial, a Intersection des faisceaux laser. 
[0046] Selon un premier aspect de la presente inven- 
tion, une fois la sonde echographique parfaitement po- 
sitionn6e par rapport au rdferentiel op6ratoire, on appli- 
que le proc6de selon I'invention de prise d'un nuage de 
points image de la surface de I'organe concerne" pour 
plusieurs positions de la sonde echographique de facon 
a determiner la position de la sonde par rapport au r6- 
ferentiel de I'organe determine par une image tridimen- 
sionnelle pre-op6ratoire. On pourra alors adapter la po- 
sition d'un outil repere par rapport a la sonde a une stra- 
tegie determines lors de la phase pre-operatoire. 
[0047] Selon un deuxieme aspect de la presente in- 
vention, une fois la sonde echographique rep^ree par 
rapport a une mire mixte du type de celle de la figure 2, 
on repere une position initiale par rapport a cette mire 
mixte d'une camera de gamma-scintigraphie ou de to- 
mographie. La sonde echographique est ensuite depla- 
cee de facon determinee par rapport a cette position ini- 
tiale, par exemple par un bras de robot code. On connaTt 
ainsi ensuite a tout instant avec precision la position mu- 
tuelie de la camera et de la sonde. II est done possible 
de fusionner des images echographiques (morphologi- 
ques) et des images gamma-scintigraphiques ou tomo- 
graphiques (fonctionnelles), ce qui fournit une aide pr6- 
cieuse au diagnostic. II est en outre possible, selon le 
premier aspect de I'invention, de fusionner les images 
echographiques et une image morphologique tridimen- 
sionnelle resultant d'une analyse par un scanner X ou 
un appareil d'IRM. La combinaison de ces deux aspects 
de I'invention permet, les images echographiques ser- 
vant d'intermediaire, de fusionner I'image de gamma- 
scintigraphie et I'image morphologique tridimensionnel- 
le resultant de ('analyse par un scanner X ou un appareil 
d'IRM. 

[0048] Bien entendu, la presente invention est sus- 
ceptible de nombreuses variantes qui apparaitront a 
I'homme de Tart, notamment en ce qui concerne le choix 
des images echographiques a realiser, et les modes 
d'obtention d'une correlation entre I'image tridimension- 
nelle pr6-ope7atoire et I'image d'un nuage de points ob- 
tenus par 6chographie d'un mSme organe. 
[0049] Comme cela a ete indique pr6cedemment, I'or- 
gane que Ton veut rep6rer peut §tre fixe par rapport a 



une region cutanee du patient. C'est par exemple le cas 
du cerveau par rapport a la tete du patient. 

Rappels sur la Maonetoencephalographie (MEG) 

5 

[0050] II s'agit d'un appareil qui vise a etudier le fonc- 
tionnement du cerveau, en analysant le champ magne- 
tique emis par celui-ci lors de diverses activites ce76bra- 
les. Ce champ est extremement faible (beaucoup plus 

10 faible que le champ magndtique terrestre). On introduit 
done la tete du patient dans un dispositrf constitue de 
plusieurs sondes capables de recueillir les champs a la 
surface du crane. Le nombre d'electrodes utilise 1 est re- 
lativement limits (les appareils les plus performants 

15 semblent permettre d'utiliser 128 electrodes). Pour de- 
terminer une carte d'intensite magnetique a I'interieur 
du cerveau, on est done dans des conditions beaucoup 
plus defavorables que, par exemple, celles de la recons- 
truction d'images tomodensitometriques a partir de pro- 

20 jections radiographiques. En effet, d'une part le nombre 
de donnees disponibles est beaucoup plus faible (en to- 
modensitometrie, on disposera pour chaque coupe de 
plusieurs centaines de points de mesure par projection, 
et de plusieurs centaines de projection), d'autre part, la 

25 propagation des ondes electro-magnetiques est forte- 
ment variable selon les caracteristiques dlectro-physio- 
logiques des tissus travers6s. Le "probleme inverse" a 
r6soudre pour la MEG est done beaucoup plus mal pos6 
que celui de la tomodensitom6trie. Ceci explique I'inte- 

30 ret de I'injection dans ce probleme de toute connaissan- 
ce a priori disponible. Or, des examens realisables 
avant la MEG donnent des informations potentiellement 
tres importantes pour la reconstruction des images 
MEG. La tomodensitometrie permet par exemple de 

35 parfaitement identifier la bolte cranienne osseuse. Or, 
I'os est le barrage le plus important dans la diffusion des 
ondes electro-magnetiques emises par le cerveau. La 
quantification de son dpaisseur et sa localisation preci- 
se sont done des informations pnScieuses pour la MEG. 

40 Les structures ventriculaires, dont les caracteristiques 
electriques sont tres particulieres, sont d'autre part par- 
faitement identifiables. L'imagerie par resonance ma- 
gnetique, quant a elle, permet de distinguer substances 
grise et blanche (aux caracteristiques electriques diff6- 

45 rentes), mais aussi de localiser les zones potentielle- 
ment 6mettrioes. L'examen en MEG peut en effet con- 
sister a enregistrer I'activite 6!ectrique du cerveau lors 
de taches sensori-motrices ou conceptuelles bien pre- 
cises, dont on sait qu'elles mettent en oeuvre des zones 

so tres bien connues du cerveau, localisables en 1RM. 
[0051] Tout ceci souligne I'interet d'une methode faci- 
le et fiable pour repositionner le reterentiel d'examens 
pre-op6ratoires tels que I'lRM ou le scanner, avant me- 
me de commencer a calculer des images de MEG. 

55 Prendre en compte les informations "pre-MEG" ainsi 
disponibles entratne une amelioration considerable de 
la qualite des images de MEG. 
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Revendications 

1 . Precede de determination de la position d'un orga- 
ne d'un patient par rapport a au moins deux dispo- 
sitifs de formation d'image, dans lequel 

le premier dispositif de formation d'image est 
une sonde 6chographique placde dans une en- 
ceinte operatoire associ6e a un premier ref6- 
rentiel et fournit une image de points de la sur- 
face de I'organe ou d'une region cutanee du pa- 
tient, 

le deuxieme dispositif de formation d'image est 
place dans une enceinte pr6-op6ratoire asso- 
ciee a un deuxieme referentiel et fournit une 
image tridimensionnelle de la surface dudit or- 
gane et le cas ech£ant de la surface cutanee, 

ce proc6de comprenant les etapes suivantes : 

determiner la position du premier dispositif par 
rapport au premier referentiel ; 
eff ectuer au moins une prise de vue avec le pre- 
mier dispositif de facon a obtenir une premiere 
image correspondant a un nuage de points de 
la surface de I'organe ou de la region cutanee ; 
prendre au moins une image tridimensionnelle 
comme deuxieme image de I'organe et de sa 
surface ou de la surface de la region cutanee 
a I'aide du deuxieme dispositif et identifier la 
forme de cette surface pour obtenir une 
reference ; et 

fusionner les premiere et deuxieme images en 
utilisant ladite reference, d'ou il r6sulte que le 
premier referentiel est repere par rapport au 
deuxieme ; 

ou I'etape de determination de la position du 
premier dispositif par rapport au premier refe- 
rentiel comprend les etapes consistant a : 

fixer la sonde sur un bras de robot articuie 
code, 

viser trois points d'une mire echographi- 
que, constituee de trois fils paralleles (1 -3) 
tendus entre deux plans, trois autres fils 
(4-6) en un materiau refiechissant les ultra- 
sons etant disposes en triangle en appui 
sur les trois fils paralleles, I'ensemble etant 
noy6 dans un milieu transmettant les ultra- 
sons, tel qu'une cuve a eau, 
faire toumer la sonde de 180° autour de 
son axe de vis6e et viser a nouveau les 
trois points de la mire, et 
repeter les deux etapes precedentes pour 
une autre position de la mire. 

2. Proc6d6 selon la revendication 1 , caract6ris6 en ce 
que le premier ref6rentiel est le ref6rentiel du sup- 



port du patient. 

3. Proc6de de determination de la position d'un orga- 
ne selon la revendication 1, caract6ris6 en ce que 

5 la sonde echographique est susceptible de fournir 
a chaque prise de vue les distances dans un plan 
de vis6e entre cette sonde et {'interface dans ledit 
plan entre ledit organe et le milieu avoisinant, et en 
ce que I'etape de prise de vue consiste a deplacer 

io la sonde et eff ectuer une prise de vue pour chacune 
de plusieurs positions determinees de cette sonde 
de facon a obtenir pour chaque prise de vue la po- 
sition par rapport a la sonde d'au moins un point de 
la surface de I'organe, d'ou il r6sulte que Ton obtient 

is une premiere image correspondant a un nuage de 
points de la surface de I'organe. 

4. Precede de determination de la position d'un orga- 
ne selon la revendication 1, caracterise en ce qu'il 

20 consiste a : 

determiner un axe d'action d'un outil operatoire 
en relation avec I'image pre-operatoire prise 
dans le deuxieme referentiel, 
25 - identifier cet axe d'action dans le premier refe- 
rentiel, et 

posit ionner un outil selon cet axe d'action dans 
le premier referentiel. 

30 5. Proc6de selon la revendication 4, dans lequel 
('identification de I'axe d'action de I'outil, dans le cas 
ou I'outil est un systeme d'analyse monte sur un 
support place dans I'enceinte operatoire mais inde- 
pendant du support du premier dispositif, est rdali- 

35 s6e en visant la mire par le premier dispositif et par 
ledit outil. 

6. Precede selon la revendication 5, dans lequel I'outil 
est un appareil de radiotherapie dont la sphere d'ac- 

40 tion est materialises par des faisceaux laser, et 
dans lequel a la mire est adjoint un reflecteur cubi- 
que positionn6 de facon determin6e par rapport 
auxdits trois autres fils, et en ce que ce reflecteur 
cubique est place initialement dans ladite sphere 

45 d'action en alignant les faisceaux laser sur les are- 
tes du cube. 

7. Proc6d6 de determination de la position d'un orga- 
ne selon la revendication 1, dans lequel : 

so 

un troisieme dispositif de formation d'image tel 
qu'un appareil de type camera gamma-scinti- 
graphique, TEP, MEG ou a rayonnement syn- 
chrotron est place dans la m§me enceinte op6- 
55 ratoire que le premier dispositif, 

les positions relatives du premier dispositif et 
du troisieme sont determinees en visant la mire 
qui est lide au support du patient par le premier 



7 



13 



EP 0 581 704 B1 



14 



dispositif et le trois ieme, et 
une fusion d'image est realised entre les ima- 
ges du premier dispositif et du troisieme. 

8. Proced6 selon la revendication 7, dans lequel le 
troisieme dispositif est un appareil du type camera 
de gamma-scintigraphieou MEG, caracteris6 en ce 
que ladite mire est constitute en outre de tubes 
creux remplis d'un produit radioactif, la mire com- 
prenant quatre tubes months non parallelement les 
uns aux autres entre deux plaques parallels. 



Claims 

1 . A method for determining the position of a patient's 
organ with respect to at least two imaging devices, 
wherein: 

the first imaging device is an echography probe 
disposed in an operation site associated with a 
first coordinate system, and provides an image 
of points of the surface of the organ or of a skin 
region of the patient, 

the second imaging device is disposed in a pre- 
operation site associated with a second coordi- 
nate system, and provides a 3D image of the 
surface of the organ, and, if required, of the skin 
surface, 

this method including the following steps: 

determining the position of the first device with 
respect to the first coordinate system; 
making at least one cliche" with the first device, 
for obtaining a first image corresponding to a 
cloud of points of the surface of the organ or of 
the skin region; 

making, as a second image, at least one 3D im- 
age of the organ and of its surface or of the sur- 
face of the skin region with the second imaging 
device and identifying the shape of this surface 
to obtain a reference; and 
matching the first and second images by using 
said reference whereby the first coordinate sys- 
tem is matched with the second coordinate sys- 
tem; 

wherein the step of determining the position of 
the first device with respect to the first coordi- 
nate system includes the steps consisting in: 

fixing the probe onto an articulated arm of 
a coded robot, 

pinpointing three points of an echography 
sighting mark, formed by three parallel 
threads (1-3) tightened between two 
planes, and by three additional threads 
(4-6) that are made of a material reflecting 



ultra-sonic frequencies, and arranged in a 
triangle abutting against the three parallel 
threads, the set of threads being immersed 
in a medium capable of transmitting ultra- 

5 sonic frequencies, such as a water vessel, 

rotating the probe by 180° about its pin- 
point axis and pinpointing again the three 
points of the sighting mark, and 
resuming the two preceding steps for an- 

io other position of the sighting mark. 

2. The method of claim 1 , wherein the first coordinate 
system is the coordinate system of the patient's 
support. 

75 

3. The method of claim 1 , wherein the echography 
probe is capable of providing, at each actuation, the 
distances within a viewing plane between said 
probe and the interface within said plane between 

20 said organ and the adjacent medium, and wherein 
the imaging technique consists in moving the probe 
and making a view for each of a plurality of prede- 
termined positions of the probe so as to obtain, for 
each view, the position with respect to the probe of 

25 at least one point of the surface of the organ, where- 
by a first image corresponding to a cloud of points 
of the surface of the organ is obtained. 

4. A method for determining the position of a patient's 
30 organ according to claim 1 , characterized in that it 

consists in: 

determining an action axis for an operation tool 
with respect to the pre-operation image taken 
35 in the second coordinate system, 

identifying said action axis in the first coordi- 
nate system, and 

positioning a tool according to said action axis 
in the first coordinate system. 

40 

5. The method of claim 4, wherein the identification of 
the action axis of the tool, when said tool is an anal- 
ysis system mounted on a support placed in the op- 
eration site but independent of the support of the 

45 first device, is made by pinpointing the sighting 
mark by the first device and by said tool. 

6. The method of claim 5, wherein said tool is a radi- 
otherapy apparatus having its sphere of action ma- 

50 terialized by laser beams, wherein a cubic reflector 
positioned in a determined manner with respect to 
said three additional threads is added to the sighting 
mark, and wherein said cubic reflector is initially 
placed in said sphere of action by aligning the laser 

55 beams with the edges of the cube. 

7. The method of claim 1 , wherein: 
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a third imaging device such as a gamma-scin- 
tigraphy, PET, MEG or synchrotron radiation 
apparatus, is placed in the same operation site 
as the first device, 

the relative positions of the first and third devic- 
es are defined by viewing the sighting mark 
which is fixed to the patient's support with the 
first and third devices, and 
an image matching is made between the imag- 
es of the first and third devices. 

8. The method of claim 7, wherein the th ird device be- 
longs to the group comprising a gamma-scintigra- 
phy camera and a MEG apparatus, the sighting 
mark being further formed by hollow catheters filled 
with a radioactive product, the sighting mark includ- 
ing four tubes arranged in a noncollinear manner 
between two parallel plates. 



PatentansprOche 

1. Verfahren zur Bestimmung der Position eines Or- 
gans eines Patienten in Bezug zu mindestens zwei 
bilderzeugenden Vorrichtungen, wobei: 

die erste bilderzeugende Vorrichtung in einem, 
einem ersten Bezugssystem zugeordneten 
Operationsraum gelegen ist und ein Punktebild 
der Oberflache des Organs oder eines Hautbe- 
reiches des Patienten liefert 
die zweite bilderzeugende Vorrichtung in einem 
einem zweiten Bezugssystem zugeordneten 
Praoperationsraum gelegen ist und ein dreidi- 
mensionales Bild der Oberflache des Organs 
und gegebenenfalls der Hautoberflache liefert, 

wobei das Verlahren die folgenden Schritte auf- 
weist: 

Bestimmen der Position der ersten Vorrichtung 
in Bezug zu dem ersten Bezugssystem; 
Machen zumindest einer Aufnahme mit der er- 
sten Vorrichtung, um ein erstes Bild entspre- 
chend einer Punktewolke der Oberflache des 
Organs oder des Hautbereiches zu erhalten; 
Aufnehmen zumindest eines dreidimensiona- 
len Bildes als zweites Bild des Organs und sei- 
ner Oberflache oder der Oberflache des Haut- 
bereiches mit Hilfe der zweiten Vorrichtung und 
Identifizieren der Form dieser Oberflache, um 
eine Referenz zu erhalten; und 
Vereinigen des ersten und zweiten Bildes unter 
Verwendung der Referenz, wodurch das erste 
Bezugssystem in Bezug zu dem zweiten mar- 
kiert wird; 

wobei der Schritt zum Bestimmen der Position 
der ersten Vorrichtung in Bezug zu dem ersten 



Bezugssystem folgende Schritte aufweist: 

Befestigen der Sonde auf einem codiert 
verschwenkbaren Robotarm, 
5 - Anvisieren dreier Punkte eines echogra- 

phischen Testobjektes, das aus drei zwi- 
schen zwei Ebenen gespannten parallelen 
Drahten (1 - 3)und drei weiteren Drahten 
(4 - 6) aus Ultraschall reflektierendem Ma- 
ze terial gebildet ist, die in einem Dreieck zwi- 
schen den drei parallelen Drahten bef estigt 
sind, wobei das Ensemble in ein Ultra- 
schall hindurch lassendes Medium, zum 
Beispiel einen Wasserbehalter, einge- 
15 taucht ist, 

- Drehen der Sonde um 180° um deren Vi- 
sierlinie und nochmaliges Anvisieren der 
drei Punkte des Testobjektes, und 
Wiederholen der zwei vorhergehenden 
20 Schritte fur eine andere Position des Test- 

objektes. 

2. Verfahren nach Anspruch 1 , dadurch gekennzeich- 
net, dass das erste Bezugssystem das Bezugssy- 

25 stem der Liege des Patienten ist. 

3. Verfahren zur Bestimmung der Position eines Or- 
gans nach Anspruch 1, dadurch gekennzeichnet, 
dass die echographische Sonde in der Lage ist, bei 

30 jeder Aufnahme die Entfernungen in einer vlsier- 
ebene zwischen dieser Sonde und der Grenzflache 
in dieser Ebene zwischen dem Organ und dem an- 
grenzenden Medium zu liefern, und dass der Auf- 
nahmeschritt darin besteht, die Sonde zu verschie- 

35 ben und fur jede der mehreren bestimmten Lagen 
dieser Sonde eine Aufnahme zu machen, um da- 
durch fur jede Aufnahme die Position zumindest ei- 
nes Punktes der Oberflache des Organs in Bezug 
zu der Sonde zu erhalten, wodurch ein erstes Bild 

40 entsprechend einer Punktewolke der Oberflache 
des Organs erhalten wird. 

4. Verfahren zur Bestimmung der Position eines Or- 
gans nach Anspruch 1, dadurch gekennzeichnet, 

45 dass es besteht aus: 

Bestimmen einer Aktionsachse eines Operati- 
onsinstrumentes in Bezug zu dem praoperati- 
vem Bild, das in dem zweiten Bezugssystem 
so aufgenommen wurde, 

Identifizieren dieser Aktionsachse in dem er- 
stem Bezugssystem, und 
Positionieren eines Instrumentes langs dieser 
Aktionsachse in dem ersten Bezugssystem. 

55 

5. Verfahren nach Anspruch 4, wobei im Falle, dass 
das Instrument ein Analysesystem ist, das auf ei- 
nem Trager in dem Operationsraum montiert, je- 
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doch unabhangig von dem Trager der ersten Vor- 
richtung ist, das Identifizieren der Aktionsachse 
realisiert wird, indem das Testobjekt durch die erste 
Vorrichtung und durch das Instrument anvisiert 
wird. 5 

6. Verfahren nach Anspruch 5, bei dem das Instru- 
ment ein Strahlentherapiegerat ist, dessen Aktions- 
sphare durch Laserstrahlen dargestellt ist, und bei 
dem dem Testobjekt ein kubischer Reflektor hinzu 10 
get ugt ist, der determiniert in Bezug zu den drei wei- 
teren Drahten positioniert ist, und wobei dieser ku- 
bische Reflektor anfanglich in der Aktionsshare 
platziert wird, indem die Laserstrahlen langs der 
Rander des Kubus ausgerichtet werden. 15 

7. Verfahren zur Bestimmung der Position eines Or- 
gans nach Anspruch 1, wobei: 

eine dritte bilderzeugende Vorrichtung, zum 20 
Beispiel eine Gamma-Scintigraphie-Kamera, 
ein TEP-, MEG- oder Synchrotron -St rahiungs- 
Gerat, in dem gleichen Operationsraum wie die 
erste Vorrichtung angeordnet wird, 
die relativen Positioner! der ersten und der drit- 25 
ten Vorrichtung durch Anvisieren des auf der 
Liege des Patienten gelegenen Testobjektes 
durch die erste und die dritte Vorrichtung be- 
stimmt werden, und 

die Bilder der ersten und der dritten Vorrichtung 30 
vereinigt werden. 

8. Verfahren nach Anspruch 7, wobei die dritte Vor- 
richtung ein Gerat nach Art einer Gamma-Scintigra- 
phie-Kamera Oder ein MEG-Gerat ist, dadurch ge- 35 
kennzeichnet, dass das Testobjekt weiterhin Hohl- 
rohre aufweist, die mit einem radioaktiven Stoff ge- 
fullt sind, wobei das Testobjekt vier Hohlrohre auf- 
weist, die zueinander nicht parallel zwischen zwei 
parallelen Platten montiert sind. *o 
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